RecGPT-V3 Technical Report
RecGPT-V3：状态化混合模态推荐系统技术报告
🧭 生成式推荐 · SID · 记忆与效率优化 ★ 深度解读
Taobao
通过记忆中心、混合模态SID和潜在推理，线上IPV+1.28%、CTR+1.00%、GMV+3.97%，成本降52.4%
📌 工作参考价值（4 点）
- 用户记忆压缩与增量更新：用 LLM 将用户长期行为压成结构化记忆单元（行为模式+偏好摘要），每两个月增量更新一次；线上推理时只输入压缩记忆+近期行为 delta，用户建模计算降低 55.8%。可直接迁移到电商用户画像存储与动态更新，避免每次请求重读全量行为。
- 混合模态 SID 打通意图到物品的管道：通过多模态对比学习 + RQ-VAE 为每个物品生成两层 Semantic ID（65K 词表），作为第二模态注入 LLM 词汇表，与文本联合训练。模型直接输出 SID 而非粗糙标签，大大降低信息瓶颈，让召回更精准。适合将物品侧协同信号与语义理解结合。
- 潜在推理替代显式 CoT 降本增效：用最多 10 个可学习潜在 token 替代平均 ~3K 的显式思维链，通过多粒度掩码重构训练保持推理能力，同时输出可解码回可读文本保障可解释性。输出 token 成本降 200 倍，特别适合高 QPS 线上场景。
- RLRF 让离线训练对齐线上目标：用线上排序模型 top-100 的平均 CTR Score 作为强化学习奖励，替代稀疏的 HitRate 奖励，使模型直接优化业务指标，且与在线 pipeline 一致。可复制到其他场景将离线代理目标改为线上可观测的业务信号。